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8p] HDI, 张建华 ! , 冯 RC. 米 秀 娟 !, CK RI, KR) 


(1. 中 国 农业 科学 院 农业 信息 研究 所 /农业 农村 部 农业 大 数据 重点 实验 室 , 北 京 100081; 
2. 甘肃 农业 大 学 机 电工 程 学院 , 上 甘肃 兰州 730070 ) 


摘 要 : 植物 病害 准确 检测 与 识别 是 其 早期 诊断 与 智能 监测 的 关键 ， 是 病虫害 精准 化 防治 与 信息 化 管理 的 
核心 。 深 度 学 习 应 用 于 植物 病害 检测 与 识别 中 ， 可 以 克服 传统 诊断 方法 的 弊端 ， 大 幅 提升 病害 检测 与 识别 
的 准确 率 ， 引 起 了 广泛 关注 。 本 文 首先 收集 和 介绍 了 部 分 公开 的 植物 病害 图 像 数 据 集 ， 然 后 系统 地 综述 了 
近年 来 深度 学 习 在 植物 病害 检测 和 识别 中 的 研究 应 用 进展 ， 阐 述 了 从 早期 检测 和 识别 算法 到 基于 深度 学 习 
的 检测 和 识别 算法 的 研究 进展 ， 以 及 各 算法 的 优点 和 存在 的 问题 。 调 研 了 相关 研究 文献 ， 提 出 了 光照 、 遮 
挡 、 复 杂 背 景 、 病 害 症状 之 间 相 似 性 、 病 害 在 不 同时 期 症状 会 有 不 同 的 变化 以 及 多 种 病害 交 丢 共存 是 目前 
植物 病害 检测 和 识别 面临 的 主要 挑战 。 并 进一步 指出 ， 将 性 能 更 好 的 神经 网 络 、 大 规模 数据 集 和 农业 理论 
基础 相 结 合 ， 是 未 来 主要 的 发 展 趋势 ， 同 时 还 指出 了 多 模 态 数据 可 以 用 于 植物 早期 病害 的 识别 ， 也 是 未 来 
发 展 方向 之 一 。 本 文 可 为 植物 病害 识别 的 深入 人 研究 与 发 展 提供 参考 。 
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1 5| E 影响 ,植物 病害 变 得 更 加 普遍 和 频繁 中。 据 报 


植物 病害 是 影响 植物 生长 的 最 复杂 多 变 且 难 T e i "s 
以 克服 的 因素 之 一 ， 是 一 种 全 球 农业 生产 和 生态 高 达 2,200 亿 美元 “。 加 强 对 植物 病害 的 防治 
安全 的 生物 灾害 。 发 生 植 物 病害 不 仅 影响 植物 的 。 管理 全 保证 农作物 再”、 农 广 品 优质 的 关键 。 


正常 生长 ， 造 成 农产品 产量 与 品质 的 降低 ， 还 会 植物 病害 防治 的 关键 是 能 够 及 时 准确 地 检测 
带 来 粮食 安全 问题 "”。 近 年 来 ， 受 全 球 气候 变 。 ”病害 危害 区 域 ， 并 对 其 病害 类 型 进行 辨识 “。 植 
暧 、 农 业 水 资源 芽 乏 及 农业 耕地 面积 减少 等 因素 ” 物 病害 种 类 繁多 ,全 世界 已 有 990 多 种 植物 病毒 
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被 确认 “。 植 物 叶 片 感染 病毒 、 真 菌 或 生理 病变 
后 ， 感染 部 位 的 外 部 形态 特征 和 内 部 生理 结构 均 
会 发 生变 化 ， 外 部 发 生 如 形变 、 褪 色 、 卷 曲 、 腐 
烂 、 变 色 等 ， 内 部 主要 为 水 分 和 色素 含量 变化 
等 1。 由 于 不 同 病 害 之 间 的 受害 症状 呈现 模糊 
性 、 复 杂 性 和 相似 性 ， 加 之 部 分 农民 的 科技 、 文 
化 素质 普遍 偏 低 ， 不 能 精确 诊断 并 掌握 植物 病害 
的 发 生 与 发 展 ， 往 往 在 植物 病害 严重 时 才 大 剂量 
地 喷洒 农药 ， 容 易 错 过 病害 最 佳 防 治 时 期 ， 不 但 
造成 农作物 大 量 减 产 ， 还 严重 污染 环境 *”。 
此 ， 如 何 快 速 、 简 便 、 准 确 地 检测 植物 病害 发 生 
区 域 并 对 其 病害 种 类 进行 识别 ， 为 病害 防治 提供 
必要 信息 ,已 成 为 植物 种 植 面临 的 重要 问题 。 

深度 学 习 概 念 在 2006 年 由 深度 学 习 之 父 
Hinton 正式 提出 "但 受 当 时 硬件 条 件 限 制 ， 
一 直 未 得 到 学 术 界 重视 。 直 到 2012 年 ，Kri- 
zhevsky 5& '") 在 图 形 处 理 器 (Graphics Process- 
ing Unit, GPU) 上 实现 了 一 种 著名 的 卷 积 神经 
网 络 (Convolutional Neural Networks, CNN) 
一 一 AlexNet， 该 网 络 在 当年 斯 坦 福 大 学 主办 的 
图 像 识 别 挑 战 赛 (ImageNet Large-Scale Visual 
Recognition Challenge) 上 的 分 类 精度 碾 压 了 其 
他 早期 计算 机 视觉 方法 。 此 后 ， 各 种 CNN 被 陆 
续 提 出 ， 深 度 学 习 得 到 快速 发 展 。 

深度 学 习 是 一 种 模拟 人 脑 进行 分 析 学 习 的 神 
经 网 络 ， 通 过 组 合 低层 特征 形成 更 加 抽象 的 高 层 
表示 属性 类 别 或 特征 ， 以 发 现 数据 的 分 布 式 特征 
表示 ， 解 决 很 多 复杂 的 模式 识别 难题 US REDE 
FIR, REPO AAR. Bae 
围 广 、 适 应 性 好 、 人 性 能 上 限 高 、 可 移植 性 好 等 优 
点 和。 深度 学 习作 为 新 人 工 智能 崛起 的 代表 ， 
不 断 取得 重大 进展 ， 很 好 地 解决 了 人 工 智 能 界 很 
多 年 来 一 直 努 力 但 仍 没 有 得 到 重要 进展 的 问 
题  “。 近 年 来 ， 深 度 学 习 技 术 逐 渐 被 引入 到 植 
物 病害 检测 与 识别 ， 在 该 领域 获得 了 较 快 的 发 
展 ， 并 涌现 出 大 量 的 研究 成 果 ， 已 成 为 本 领域 研 
究 热 点 。 本 文 对 近年 来 基于 深度 学 习 的 植物 叶 部 
病害 的 检测 和 识别 研究 进行 了 综述 ,分别 从 植物 


病害 图 像 数 据 集 、 植 物 病害 目标 检测 人 研究 进展 和 
植物 病害 识别 研究 进展 等 三 个 方面 进行 阐述 ， 总 
结 出 植物 病害 检测 和 识别 目前 面临 的 挑战 ， 并 对 
未 来 的 发 展 趋势 进行 了 展望 。 


2 植物 病害 图 像 数 据 集 


数据 集 是 构建 深度 学 习 模 型 的 基础 ， 数 据 集 
的 质量 和 大 小 决定 着 深度 学 习 模 型 能 否 构 建成 
功 "“。 高 质量 的 数据 集 往往 能 够 提高 模型 训练 
的 质量 和 预测 的 准确 率 ， 也 可 有 效 地 提高 神经 网 
络 模型 的 泛 化 能 力 。 一 个 更 高 质量 的 模型 可 以 更 
精准 地 区 分 植物 病害 的 不 同类 型 及 危害 程度 ， 从 
而 提供 更 科学 的 防治 措施 。 据 调查 ， 目 前 已 形成 
了 多 个 已 公开 的 植物 病害 图 像 数据 集 ， 具 体 如 
表 1 所 示 。 


2.1 国外 主要 植物 病害 图 像 数 据 集 


(1) PlantVillage。 该 数据 集 是 David Hudhes 
和 Marcel Salathé 联合 创建 的 公开 数据 集 ， 是 目 
前 被 使 用 次 数 最 多 的 数据 库 之 一 。PlantVillage 31€ 
括 了 14 种 植物 、26 种 病害 ， 共 38 个 类 别 ， 包 含 
54,036 幅 图 像 ， 非 常 适用 于 植物 病害 检测 和 识别 
模型 的 训练 ， 但 PlantVillage 中 的 图 像 大 多 是 在 
实验 室 或 单一 背景 下 拍摄 的 ， 复 杂 自 然 条 件 下 拍 
摄 的 图 像 较 少 。 

(2) Plant Pathology 2020 - FGVC7。 主 要 是 
高 质量 带 注 释 的 苹果 图 像 ， 包 括 苹果 黑 星 病 、 苹 
果 锈 病 、 多 种 病害 共存 和 健康 叶片 共 3651 张 图 
像 。 其 中 苹果 黑 星 病 图 像 1200 张 ， 苹果 锈病 图 
像 1399 张 ， 多 种 病害 共存 图 像 187 张 ， 健 康 叶片 
图 像 865 张 。 

(3) Cucumber Plant Diseases Dataset。 该 数 
据 集 由 Karim Negm 分 享 ， 共 包含 69$ 张 田间 自 
然 条 件 下 拍摄 的 黄瓜 有 病 的 和 健康 的 图 像 。 

(4) New Plant Diseasea Dataset。 由 Samir 
Bhattarai 使 用 数据 增强 技术 重新 创建 的 数据 集 。 
该 数据 集 由 38 个 不 同 的 类 别 组 成 ,包括 健 康 叶 
片 和 非 健康 叶片 共 87,000 张 ， 但 该 数据 图 像 背景 
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表 1 公开 的 植物 病害 图 像 数据 集 及 网 址 
Table 1 Publicly available plant disease image data sets and websites 
区 域 数据 集 名 称 数据 集 网 址 
PlantVillage https://plantvillage.psu.edu/ 
CVPR 2020-FGVG7 https ://www.kaggle.com/c/plant-pathology-2020-fgvc7/data 
Cucumber Plant Diseases Dataset https: //www.kaggle.com/kareem3egm/cucumber-plant-diseases-dataset 
New Plant Disease Dataset https ://www.kaggle.com/vipoooool/new-plant-diseases-dataset 
PlantDoc https : //github.com/pratikkayal/PlantDoc-Dataset 
国外 Rice Diseases Image Dataset https ://www.kaggle.com/minhhuy28 1 0/rice-diseases-image-dataset 
PlantPathology Apple Dataset https: //www.kaggle.com/lextoumbourou/plantvillageapplecolor 
New Plant Diseases Dataset ( Augmented) https ://www.kaggle.com/noulam/tomato 
PlantifyDr Dataset https ://www.kaggle.com/lavaman 15 1/plantifydr-dataset 
Plant disease recognition dataset https ://www.kaggle.com/rashikrahmanpritom/plant-disease-recognition-dataset 
= Corn Leaf Diseases( NLB ) https: //www.kaggle.com/rabbityashow/corn-leaf-diseasesnlb 
> PDD271 https : //drive.google.com/file/d/1QMR1bUfEuMbZz-Mb3u2IXdbMgz70j2Pe/view 
© 国内 农业 病虫害 研究 图 库 (IDADP) http: //www.icgroupcas.cn/website bchtk/index.html 
~N PDDB https ://www.digipathos-rep.cnptia.embrapa.br/jspui/ 
o 水 稻 叶 病 数据 集 (Rice Leaf Diseases Data Set) — https: //archive.ics.uci.edu/ml/datasets/Rice+Leaf+Diseases 
x 为 单一 背景 2.2 国内 植物 病害 图 像 数据 集 
© (5) PlantDoc。 由 Singh 等 "创建 ， 共 包 -—" : —€—— 
Co 2598 张 图 像 ， 涵 盖 13 种 植物 17 种 病害 类 型 。 ELT E. 
N JER PDD271, £145 220,592 幅 植物 叶片 图 像 ， 
© (6) Rice Diseases Image Dataset。 涵 盖 水 稻 y E Pu PA 
N CEU OBERT. ATRAER EE LULA - 
E 张 图 像 。 至 少 包含 500 张 图 像 ，200 多 株 植 物 。 且 每 张 图 
>< (7) PlantPathology vod Dataset, 由 Plant- He 时 都 由 Rise iie : nidi , i 未 参与 
rz — — JELA —— n. u u 
Q (8) New Plant Diseases Dataset ( Augment- (2) 农业 病虫害 研究 图 库 (IDADP)。 该 数 


ed) 。 该 数据 集 是 一 个 相关 番茄 的 数据 集 ， 基 于 
Plantvillage 数 据 ， 经 数据 增 广 技术 衍生 而 来 ， 包 
括 9 个 番茄 病 害 和 1 个 健康 叶片 FE 22,900 5K 
图 像 。 

(9) PlantifyDr Dataset。 该 数据 集 包 含 10 种 
不 同 植物 类 型 ， 主 要 为 苹果 、 甜 板 、 樱 桃 、 柑 
T. EX, WA. BET. dou. BRAN. 37 
种 植物 病害 类 型 共 125,000 张 图 像 。 

(10) Plant Disease Recognition Dataset。 该 
数据 集 包含 健 康 、 粉 状 、 生 锈 3 种 共 1530 GK 
图 像 。 

(11) Corn Leaf Diseases (NLB), £1 Ag 
和 健康 玉米 叶片 共 4,115 张 。 


据 集 是 由 中 国 科学 院 合肥 智能 机 械 研究 所 、 亚 热 
带 农 业 生态 研究 所 和 遥感 与 数字 地 球 研 究 所 共同 
建设 的 综合 数据 库 ， 涵 盖 大 田 作物 、 水 果 和 蔬菜 
等 多 种 植物 类 型 及 真菌 、 细 菌 和 病毒 等 多 种 病害 
种 类 。 每 种 病虫害 包括 几 百 到 几 千张 图 像 。 图 像 
绝 大 部 分 用 单反 相机 拍摄 ， 分 辩 率 不 小 于 两 千 万 
像素 (6000X4000，5472X3648) ， 少 部 分 用 手 
机 拍摄 ， 分 辩 率 像素 为 4128X2322。 而 且 绝 大 多 
数 图 像 都 是 从 自然 条 件 下 拍摄 的 ， 可 应 用 于 复杂 
自然 条 件 下 植物 病害 的 识别 和 检测 。 

(3) 植物 疾病 症状 图 像 数据 库 (PDDB). 
该 数据 集 是 一 个 免费 的 数据 库 ， 涵 盖 21 种 植物 ， 
171 种 病害 类 型 ， 共 收集 接近 5 万 幅 图 像 。85% 
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的 图 像 是 在 真实 条 件 下 拍摄 ， 其 他 图 像 在 可 控 条 
件 下 拍摄 。 图 像 全 部 由 数码 相机 和 移动 设备 拍 
BR, A HERE 1 一 24 万 像素 之 间 S, HRAT 
专家 标注 。 

(4) 水 稻 叶 病 数据 集 。 该 数据 集 图 像 是 在 阳 
光 直 射 下 以 白色 背景 拍摄 的 ， 主 要 为 水 稻 白 叶 村 
病 、 褐 斑 病 和 黑 穗 病 ， 每 种 病害 均 拍 摄 40 张 ， 
共 120 张 。 


3 植物 病害 目标 检测 研究 进展 


植物 病害 目标 检测 是 利用 计算 机 视觉 技术 在 
复杂 自然 条 件 下 检测 出 植物 病害 侵 染 区 域 及 其 准 
确 位 置 ， 是 植物 病害 准确 分 类 识别 和 病害 危害 程 
度 评估 的 前 提 ， 也 是 植物 病害 区 域 准确 定位 并 引 
导 植 保 装备 对 靶 喷 药 的 关键 “。 

早期 植物 病害 目标 检测 算法 采用 滑动 窗口 策 
略 选 出 候选 区 域 ， 然 后 提取 候选 区 域 特征 ， 最 后 
使 用 分 类 器 进行 分 类 ， 从 而 获得 目标 区 域 ， 如 
V-J (Viola-Jones) 检测 、 方 向 梯度 直方 图 (His- 
togram of Oriented Gradient, HOG) 检测 和 有 关 
可 变形 部 件 模 型 (Deformable Part Model, 
DPM) 算法 等 。 滑 动 窗 口 方法 是 设置 不 同 的 尺 
度 和 宽度 对 图 像 进行 遍历 ， 虽然 这 种 方法 应 用 于 
病害 定位 检测 可 以 不 错过 任何 一 个 病害 区 域 目 
标 ， 但 产生 的 多 余 候选 窗口 会 带 来 较 大 的 计算 
量 , 量 将 病害 图 像 全 部 遍历 一 遍 要 花费 较 多 时 
间 ， 导 致 检测 的 实效 性 差 ，。 男 外 ， 候 选区 域 
的 特征 提取 采用 手工 方式 ， 提 取 的 特征 较 多 集中 
在 病害 颜色 、 形 状 等 底层 特征 ， 造 成 病害 检测 的 
鲁 棒 性 差 。 分 类 器 采用 Adaboost、 文 持 问 量 机 
(Support Vector Machine, SVM) 等 进行 识别 ， 
识别 速度 慢 、 准 确 率 低 。 


3.1 基于 目标 检测 框架 的 植物 病害 检测 


基于 深度 学 习 的 R-CNN (Region-CNN) 系 


列 、YOLO (You Only Look Once), SSD (Sin- 


gle Shot MultiBox Detector) 以 及 CenterNet 等 新 
检测 算法 显著 优 于 早期 的 植物 目标 检测 算法 。 基 


于 深度 学 习 的 目标 检测 框架 可 以 分 为 二 阶 检测 器 
(Two-stage) 和 一 阶 检测 器 (One-stage) 两 
大 类 n 
3.1.1 基于 二 阶 检测 器 的 植物 病害 检测 

二 阶 检测 器 首先 使 用 候选 框 生成 器 生成 稀 玻 
的 候选 框 集 ， 并 从 每 个 候选 框 中 提取 特征 ， 然 后 
使 用 区 域 分 类 器 预测 候选 框 区 域 的 类 别 (如 图 1 
所 示 )。 如 基于 区 域 建议 的 CNN， 包 括 R-CNN、 
FastrRCNN Faster-RCNN 及 其 变 体 。2014 4E , 
Girshick 等 ”在 一 篇 会 议论 文中 提出 了 了 R-CNN， 
首次 使 用 卷 积 神经 网 络 提取 图 像 特征 ， 开 启 了 利 
用 深度 学 习 进 行 目 标 检 测 的 大 门 。 在 R-CNN 基 
础 上 ，Girshick 2 提出 了 Fast-RCNN fik T R- 
CNN 在 候选 区 域 选择 的 过 程 中 出 现 大 量 重 县 框 
的 问题 。 经 过 R-CNN Ail Fast RCNN 的 积淀 ，Ren 
等 2 在 2016 年 提出 了 FasterRCNN， 将 特征 提 
取 、 边 界 框 回归 和 分 类 集成 到 一 个 网 络 中 ， 使 综 
合 性 能 有 较 大 提高 ， 在 检测 速度 方面 尤为 明显 。 
Fuentes 等 °” 应 用 Faster-RCNN+VGGNet/ResNet 
的 检测 框架 对 番茄 病虫害 区 域 进行 定 位 检测 H 
图 像 库 中 类 别 有 10 种 病害 ， 平均 精 度 均值 
(mean Average Precision， mAP) 值 达 到 了 
85.98%, Ml Faster-RCNN 逐渐 被 应 用 到 植物 病 
害 区 域 检测 上 。 刘 阅 宇 等 ”9 采用 FasterRCNN 
HEY, 分别 采 用 ZF Net 和 VGGNet 作 为 骨干 网 
络 ， 能 准确 定位 葡萄 叶片 和 叶片 上 的 病 斑 。 
Ozguven 和 Adem 2 通过 改变 Faster-RCNN 模型 
的 参数 实现 对 甜菜 叶 斑 病 的 自动 检测 ， 对 155 幅 
甜菜 图 像 进行 了 训练 和 测试 ， 获 得 了 95.48% 的 
总 体 分 类 正确 率 。Bari 等 °°) 使 用 FasterRCNN 对 
水 稻 患 病 叶 片 图 像 和 健康 叶片 图 像 进 行 检 测 ， 识 
别 叶 片 患 病 准确 率 均 在 98% 以 上 ， 表 明 Faster- 
RONN 可 以 相对 准确 实时 地 检测 水 稻 常 见 病 害 。 
Zhou 4& 7 提出 了 一 种 基于 FCM-KM 和 Faster- 
RCNN 融合 的 水 稳 病害 快速 检测 方法 ， 以 3010 
幅 图 像 为 研究 基础 数据 集 ， 得 到 稻 瘟 病 、 白 叶 枯 
病 和 纹 桂 病 的 检测 精度 分 别 为 96.71%、97.53% 
和 98.26%， 检 测 时 间 分 别 为 0.65、0.82 和 0.53 so 
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Xie 等 提出 了 一 种 基于 改进 的 深度 卷 积 神经 网 
络 一 一 Faster DR-IACNN 模型 ， 在 自 建 的 葡萄 叶 
疾病 数据 集 (Grape Leaf Disease Dataset, 
GLDD) 上 展开 研究 ， 并 引入 了 Inception-v1 模 
块 Inception-ResNetv2 模块 和 压缩 和 激励 网 络 
(Squeeze-and-Excitation Networks, SENet), iX 


模型 具有 较 高 的 特征 提取 能 力 ，mAP 精度 为 
81.1%， 检 测速 度 为 15.01 fs。 上 述 研究 表明 ， 
基于 二 阶 检 测 器 的 植物 病害 目标 检测 ， 在 检测 准 
确 度 方面 获得 了 较 好 的 病害 检测 效果 ， 但 由 于 检 
测速 度 慢 ， 只 能 用 在 实时 性 要 求 不 高 的 场景 中 。 


CNN 特 征 提取 


图 1 植物 病害 检测 的 二 阶 检测 算法 流程 


Fig. 1 Two-stage detection algorithm diagram of plant disease detection 


3.1.2 ”基于 一 阶 检测 器 的 植物 病害 检测 

一 阶 检测 器 直接 对 特征 图 上 每 个 位 置 的 对 象 
进行 类 别 预测 ， 不 经 过 二 阶 检测 器 中 的 区 域 建 议 
步骤 〈 有 具体 步骤 见 图 2)， 如 YOLO、SSD 及 其 变 
体 。YOLO 是 Redmon % ©! 于 2016 年 提出 的 一 
种 一 阶段 检测 算法 。YOLO 的 
设计 不 同 于 Faster-RCNN， 它 将 
检测 过 程 整合 为 单个 网 络 同时 
实现 目标 区 域 预测 和 分 类 的 回 E 
归 过 程 。YOLO 并 不 生成 候选 S 
框 ， 而 是 将 图 像 划 分 成 网 格 ， 
以 网 格 为 中 心 确定 目标 边界 和 
类 别 5j Faster-RCNN 相 比 ， 
YOLO 在 满足 更 高 精度 的 同时 
大 大 提高 了 检测 速度 。Bhatt 
等 引 在 复杂 自然 条 件 下 的 茶园 采集 图 像 ， 并 提 
出 了 一 种 基于 YOLOv3 的 病虫害 检测 方法 ， 在 确 
保 系 统 实 时 可 用 性 的 同时 ， 实 现 了 mAP 为 86%， 
交 并 比 (Intersection-over-Union, IOU) X 50%. 
Maski fll Thondiyath ^' 提出 了 几 个 轻 量 级 的 YO- 
LO 模型 ， 用 于 移动 农业 机 器 人 对 植物 病害 的 检 
WW, ， 主 要 针对 木瓜 环 斑 病 建立 了 一 个 大 规模 的 数 
据 集 ， 在 此 基础 上 tny-YOLOv4 算 法 的 mAP 最 
高 可 达 99.9%。MobileNetV2-YOLOv3 算法 在 疾 


病 严重 程度 检测 方面 的 最 高 mAP 约 为 98.39%。 
李 吴 等 0€ 基于 改进 的 YOLOv4 实现 柑橘 病虫害 
叶片 检测 ， 并 根据 检测 目标 框 实现 柑橘 病害 叶片 
的 局 部 分 制 ， 结 合 DenseNet 算 法 对 分 制 出 来 的 
叶片 进行 病害 检测 ， 检 测 准确 率 达 到 95.46%。 


CNN 特 征 提取 


图 2 植物 病害 检测 的 一 阶 检测 算法 图 


Fig. 2 One-stage detection algorithm diagram of plant 


disease detection 


针对 YOLO 的 缺陷 ，Liu F 2016 年 提 
出 了 SSD。 相 较 于 YOLO，SSD 的 改进 主要 包括 
3 个 方面 : 一 是 提取 不 同 尺度 的 特征 图 ， 解 决 了 
YOLO 不 能 准确 检测 小 目标 的 问题 ; 二 是 设计 了 
多 个 不 同 尺 度 的 先 验 框 ; 三 是 在 VGG16 网 络 中 
增加 6 个 卷 积 层 来 预测 边界 框 偏 移 量 ， 解 决 了 
YOLO 定 位 不 准 的 问题 。Sun 等 P" 提出 了 一 种 可 
部 署 在 移动 设备 上 的 轻 量 级 的 MEAN-SSD 病害 
检测 模型 。MEAN-SSD 是 通过 引入 MEAN 块 
(Mobile End AppleNet block) 和 所 有 3X3 卷 积 核 
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都 替换 为 MEAN Jt AY Inception 模块 构建 而 成 ， 
mAP 能够 达到 83.12%， 速 度 达 到 12.53 f/s; Sun 
Ak UU 提出 了 一 种 多 尺度 特征 融合 的 改进 的 SSD 
算法 ， 该 方法 结合 了 数据 预 处理 、 特 征 融 合 、 特 
征 共享 、 疾 病 检测 等 步 又 ， 用 于 检测 复杂 背景 下 
玉米 叶 枯 病 ，mAP 比 原 SSD 算法 的 mAP 高 了 
20% ZEA 〈 从 71.80% 提 高 到 91.83%)。 同 时 传输 
速度 也 从 24 f/s 提 高 到 28.4 Vs， 达 到 了 实时 检测 
25 fs 的 标准 。Selvaraj 等 P" 对 比 了 几 种 著名 目 
标 检测 框架 和 不 同 骨 干 网 络 组 合 对 香蕉 病虫害 检 
测 的 效果 ， 数 据 库 包 括 了 10 种 香蕉 病虫害 ， 共 3 
万 余 张 图 像 ， 发 现 SSD 框 架 和 MobileNet v1 的 组 
合 检测 总 体 效 果 最 好 。 虽 然 经 过 不 断 地 改进 和 优 
化 ， 一 阶段 检测 算法 在 植物 病害 精度 和 速度 上 都 
有 所 提高 ， 但 锚 框 的 存在 仍然 令 这 种 检测 方法 不 
够 精简 。 


3.2 基于 无 锚 框 的 植物 病害 检测 


2019 年 ，Zhou 等 ”提出 了 一 种 无 锚 框 的 检 
测算 法 一 一 CenterNet， 该 算法 是 在 CornerNet 的 
基础 上 改进 而 来 ， 由 原来 对 两 个 关键 点 〈 即 图 像 
的 左上 角 和 右 下 角 ) 的 检测 改 为 对 图 像 中 心 点 的 
估计 。 由 于 该 算法 去 掉 了 生成 锁 框 这 一 操作 ， 并 
且 由 热力 图 估计 损失 ， 省 去 了 一 些 耗 时 的 操作 ， 
所 以 很 大 程度 上 提升 了 检测 性 能 。 目 前 ， 基 于 
CenterNet 的 病害 检测 研究 还 较 少 ， 但 CenterNet 
已 被 证 明 可 以 应 用 于 自然 条 件 下 的 目标 检测 。 夏 
雪 等 中 通过 CenterNet 检 测 网 络 与 MobileNet v3 
相 结 合 ， 构 建 一 个 新 的 网 络 一 一 M-CenterNet， 
对 自然 条 件 下 果树 上 的 苹果 进行 检测 。 并 与 Cen- 
terNet 和 SSD 做 对 比 ， 发 现 所 提 网 络 不 论 是 检测 
精度 还 是 检测 速度 上 都 比 CenterNet 和 SSD 要 好 
很 多 ,尤其 是 检测 速度 上 ， 比 这 两 种 网 络 提高 了 
1 信 左 右 。Albattah 等 “提出 了 一 种 改进 的 Cen- 
terNet 算 法 ， 以 PlantVillage Kaggle 数 据 库 为 主要 
数据 来 源 ， 以 DenseNet-77 为 基础 网 络 对 深层 次 
关键 点 进行 提取 ， 然 后 分 别 对 番 荔 、 蔷 果 、 和 葡萄 
等 在 内 的 14 种 植物 26 类 病害 及 12 类 健康 叶片 进 


行 识 别 ， 从 多 方面 分 析 得 出 ， 改 进 的 CenterNet 
方法 比 目 前 最 新 的 EfficientNet 方 法 能 够 更 准确 
地 识别 植物 病害 。 无 锚 框 的 检测 算法 在 性 能 上 优 
于 基于 锚 框 的 检测 算法 ， 是 今后 病害 区 域 检测 方 
面 的 主要 研究 方向 。 


3.3 植物 病害 目标 检测 分 析 与 展望 


近年 来 植物 病害 检测 研究 进展 见 表 2 一 表 4。 
AWA, FRE OK. USE. SER. T8 
萄 等 植物 病害 目标 检测 ， 一 阶段 检测 算法 和 二 阶 
检测 算法 都 获得 了 较 好 的 检测 效果 。 但 目前 文献 
表明 ， 在 病 斑 边 界 框 (bounding box) 标识 时 较 
为 混乱 ， 一 些 文献 对 一 张 叶片 上 大 的 病 斑 单 独 框 
出 ， 一 些 文献 则 对 小 且 多 的 病 斑 往往 采用 一 个 
框 ， 对 没有 明显 边界 的 病害 则 往往 不 考虑 在 病害 
检测 任务 范畴 内 。 同 时 ， 对 植物 生长 的 复杂 自然 
场景 中 进行 病害 目标 检测 研究 较 少 ， 这 种 场景 下 
密集 、 小 目标 检测 算法 有 待 进一步 研究 ， 同 时 还 
需 应 对 复杂 自然 条 件 下 可 能 出 现 的 光照 、 阴 影 、 
复杂 背景 、 遮 挡 、 县 加 、 小 病 斑 检 测 等 难点 。 

如 今 已 提出 的 病害 检测 算法 均 对 特定 的 数据 
集 有 较 好 的 检测 效果 ， 但 若 数据 集 发 生 了 改变 ， 
则 可 能 会 导致 检测 效果 不 佳 ， 所 以 在 未 来 ， 提 高 
模型 的 鲁 棒 性 是 值得 研究 的 一 个 方向 。 另 外 ， 早 
期 病害 的 检测 研究 仍 处 于 空白 阶段 ， 主 要 因为 数 
据 采 集 的 困难 。 早 期 病害 部 位 信息 较 少 ， 研 究 者 
无 法 保证 准确 识别 病害 种 类 与 病 斑 位 置 ， 但 早期 
病害 检测 更 有 利于 防止 病菌 的 传播 与 发 展 ， 有 效 
防治 植物 病害 ， 所 以 今后 应 重视 开展 对 早期 病害 
检测 的 开发 研究 ， 以 期 达到 及 时 防治 、 减 少 损失 
的 目的 。 目 前 对 植物 的 病害 检测 还 处 于 有 人 工 干 
预 的 半自动 化 过 程 ， 探 索 全 自动 化 的 病害 检测 方 
法 也 将 是 未 来 主要 研究 方向 之 一 。 


4 植物 病害 识别 研究 进展 


植物 病害 识别 是 指 对 病害 图 像 进行 处 理 、 分 
析 和 理解 ， 以 辨识 不 同 种 类 病害 对 象 的 技术 ， 是 
植物 病害 及 时 有 效 防治 的 主要 依据 。 
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表 2 近年 来 基于 二 阶 检测 器 的 植物 病害 目标 检测 研究 进展 
Table 2 Recent advances in plant disease target detection based on second-order detector 
编号 作者 年 份 ”植物 种 类 ”数据 集 / 幅 获取 方法 检测 网 络 框架 最 优 准确 率 /% 
1 Zhang 4& 2021 KE 2200 间 拍 摄 Faster-RCNN 83.34 
2 Hu 45 2021 茶叶 398 间 拍 摄 Faster-RCNN 84.50 
3 Eser ^ 2021 Á E 544 间 拍 摄 Faster RCNN-gc 98.06 
4 Rehman 4$ 4 2021 苹果 1200 PlantVillage Mask RCNN 96.60 
5 Anandhan il Singh'**! — 2021 水 稻 1500 间 拍 摄 Mask R-CNN 96.00 
6 Kumar ^" 2021 甘蔗 2940 间 拍 摄 Faster-RCNN 58.13 
7 Bari 4") 2021 水 稳 2400 Kaggle+ 田 间 拍 摄 Faster-RCNN 99.17 
8 BERGE 2020 苹果 2029 间 拍 摄 Faster-RCNN 82.28 
9 Xie 4 9" 2020 葡萄 4449 间 拍 摄 Faster DR-IACNN 81.10 
10 Wang 45 ^! 2019 E 286 线 上 采集 Mask R-CNN 99.64 
S 11 OzguvenfllAdem"" 2019 甜菜 155 甜菜 叶 数 据 集 Faster-RCNN 95.48 
Le) 12 Zhou 等 291 2019 水 稳 3010 间 拍 摄 Faster-RCNN 98.26 
N 13 乔 虹 等 5 2018 葡萄 2000 间 拍 摄 Faster-RCNN 90.90 
T" 16 刘 阅 宇 等 ”9 2018 葡萄 6000 间 拍 摄 Faster-RCNN 75.52 
e 14 Fuentes 45 24 2017 番茄 5000 间 拍 摄 Faster-RCNN 90.60 
e 15 刘 阅 宇和 冯 全 * 2017 葡萄 1135 间 拍 摄 Faster-RCNN 87.20 
CN 
e 表 3 近年 来 基于 一 阶 检测 器 的 植物 病害 目标 检测 研究 进展 
E Table 3 Recent advances in plant disease target detection based on first-order detector 
© 编号 作者 年 份 ” 植 物种 类 ”数据 集 / 幅 获取 方法 检测 网 络 框架 最 优 准确 率 /% 
N 1 Wang 4&5" 2001 “5 种 植物 3000 可 控 环 境 拍摄 DBA SSD 92.20 
> 2 ShillfllRahman^" 2021 ”13 种 植物 2598 PlantDoc 数 据 集 YOLOv4 55.45(IoU=50%) 
"dd 3 Wang fil Liu ^" 2021 番茄 1263 ] 间 拍摄 MP-YOLOv3 95.60 
X 4 He 4554 2021 d JR 529 田间 拍摄 SSD768 92.40 
c 5 Atila 4509 2021 BE 61,486 PlantVillage 改进 的 YOLO 98.40 
p= 6 “Maski 和 Thondiyath 3 2021 木瓜 2000 ] 间 拍摄 YOLO 99.90 
- 7 ap agen 2021 Dit 392 田间 拍摄 YOLOv4 87.72 
8 Sun 45°) 2021 苹果 2230 田间 拍摄 MEAN-SSD 83.12 
9 Liu fll Wang“ 2020 番茄 15,000 ] 间 拍摄 YOLOv3 92.39 
10 Morbekar 4557! 2000 ”14 种 植物 ^ 54,306 PlantVillage YOLO 65.48 
11 Ponnusamy “:'*! | 2020 ”多 种 植物 304 田间 拍摄 YOLOv3 82.38 
12 Liu fll Wang ^" 2020 E 2385 间 拍 摄 + 线 上 采集  MobileNetv2-YOLOv3 94.13 
13 Sun 4g?" 2020 玉米 8152 NLB 数据 集 SSD 91.83 
14 Jiang 等 (中 2019 苹果 26,377 可 控 环境 + 田间 拍摄 INAR-SSD 78.80 
15 Tian 等 [9 2019 苹果 640 间 拍 摄 + 线 上 采集 YOLOv3-Dense 95.57 
16 RamcharanAj'?' 2019 KE 2415 ] 间 拍摄 SSD 94.00 
17 Bhatt 4&2! 2019 茶叶 4000 间 拍 摄 + 线 上 采集 YOLOv3 86.00 
18 Selvaraj 等 ”3 2019 TRE 18,000 间 拍 摄 SSD 99.00 


早期 植物 病害 识别 方法 中 ， 病 害 特 征 的 提取 与 后 续 分 类 带 的 匹配 性 。 传 统 的 图 像 特征 包括 形 
和 选择 是 依据 先 验 经 验 人 工 完 成 的 ， 识 别 性 能 好 ”” 状 、 颜 色 、 纹 理 特征 等 ， 曾 被 广泛 地 用 于 植物 病 
tn 害 的 分 类 。 形 状 特征 包括 基于 物体 边界 形状 的 方 

识别 特定 对 象 的 信息 和 具有 高 可 分 性 ， 以 及 ”法 ， 如 侍 里 叶 形 状 描述 符 以 及 基于 区 域 的 形状 表 
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36 
表 4 近年 来 基于 无 锚 框 及 自 建 网 络 的 植物 病害 目标 检测 研究 进展 
Table 4 Recent advances in plant disease target detection based on anchor-free and self-built networks 

编号 作者 年 份 ”植物 种 类 数据 集 / 幅 获取 方法 检测 网 络 框 架 最 优 准 确 率 /% 

1 Albattah 4540 2021 ”14 种 植物 54,306 PlantVillage CenterNet+DenseNet-77 99.98 

2 Kavitha 和 Savarimuthu'” ”2021 ”6 种 植物 3953 可 控 环 境 拍 摄 DPD-DS 87.12 

3 Liu &&(64 2021 黄瓜 4788 田间 拍摄 EFDet 83.32 

4 Dwivedi 45/5 2021 葡萄 4500 PlantVillage GLDDN 99.93 

5 Nihar 4 ^! 2001 ”黄豆 番茄 1043 可 控 环 境 拍 摄 ModCNN 97.69 

6 Nagasubramanian “#7! 2019 KE 111 可 控 环 境 下 拍摄 3D DCNN 95.73 
WIE, WERKE, 、 小 波 变换 方法 、 小 波 轮  ” 行 细 致 的 优化 ， 导 致 复杂 场景 下 的 植物 病害 识别 
廓 描述 符 等 。 颜 色 特 征 包 括 图 像 各 个 颜色 分 量 的 ”效果 不 佳 。 


一 阶 /二 阶 灰 度 、 直 方 图 、 均 值 等 参数 ; 纹理 特 
征 如 灰 度 共生 抢 阵 、 分 形 特征 、 小 波 、Gabor 等 ， 
以 及 描述 分 形 特 征 的 分 形 维 数 ， 与 图 像 的 粗糙 程 
度 直接 相关 ， 用 于 对 病 斑 纹理 变化 的 描述 。 为 提 
高 识别 性 能 ， 常 见 的 策略 是 采用 各 种 图 像 特征 的 
组 合 以 及 分 类 需 的 集成 。 人 工 设计 提取 优秀 的 识 
别 特征 的 要 求 较 高 ， 需 要 从 事 此 项 工作 的 人 具有 
丰富 的 工程 技能 和 领域 专业 知识 ， 但 受 植物 类 
型 、 生 长 阶段 、 病 害 种 类 、 环 境 光 照 等 因素 的 影 
响 ， 植 物 病害 症状 复杂 ， 人 工 无 法 对 特征 设计 进 


深度 学 习 可 以 使 用 通用 学 习 程 序 从 原始 数据 
(如 图 像 像素 ) 中 自动 学 习 特 征 ， 能 避免 人 工 特 
征 工程 的 局 限 。 近 年 来 ， 作 为 深度 学 习 核 心 的 各 
种 卷 积 神经 网 络 被 陆续 提出 ， 如 ZF Net (2013)、 
VGG (2014) , GoogleNet (2014) , ResNet 
(2015) , DenseNet (2017), MobileNet (2017) 
以 及 EfficientNet (2019) 等 ， 同 时 ， 各 个 卷 积 神 
经 网 络 都 在 不 断 更 新 与 优化 中 ， 以 适应 不 同 的 任 
务 和 性 能 要 求 。 基 于 深度 学 习 的 植物 病害 识别 基 
本 步骤 见 图 3。 


图 3 植物 病害 识别 深度 学 习 网 络 图 


Fig. 3 Deep learning network diagram for plant disease recognition 


4.1 基于 深度 网 络 的 植物 病害 识别 


相 较 于 早期 植物 病害 识别 方法 ， 基 于 深度 网 
络 的 植物 病害 识别 可 以 自动 对 图 像 进行 预 处 理 ， 
不 再 需要 通过 人 工 处 理 图 像 ， 因 此 大 大 提高 了 病 
害 识 别 的 效率 。 同 时 ， 随 着 网 络 深度 的 增加 ， 模 
型 的 学 习 能 力 更 强 ， 提 取 的 特征 更 丰富 。 但 由 于 
网 络 深度 的 增加 ， 训 练 过 程 会 消耗 大 量 的 时 间 ， 


并 且 可 能 会 出 现在 训练 时 过 拟 合 的 问题 。 不 少 

究 人 员 尝 试 在 植物 病害 识别 中 采用 以 CNN 为 主 
的 深度 神经 网 络 ， 以 提高 识别 的 准确 性 。Kawa- 
saki 等 5" 最早 采 用 CNN 进行 病害 识别 ， 基 于 健 
康 叶片 与 2 种 病害 叶片 类 型 的 800 幅 黄瓜 病害 图 
像 训 练 CNN， 训 练 时 用 4-fold 交 叉 验 证 ， 最 终 获 
f3 Y 94.9% 的 准确 率 。Sladojevic 等 9 从 互联 网 
上 搜集 了 2589 张 图 像 ， 包 括 桃 、 梨 、 苹 果 等 6 种 
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植物 叶片 的 13 种 病害 、 正 常 叶片 和 背景 共计 15 
种 类 型 ， 通 过 仿 射 、 投 影 和 旋转 等 数据 增 广 技术 
增加 了 图 像 数量 ; 采用 CaffeNet 和 迁移 学 习 ， 特 
征 提 取 层 参数 在 ImageNet 上 预 训练 ， 只 在 最 后 
分 类 的 全 连接 层 进行 了 精 调 (fine-tuning)， 该 网 
络 的 平均 分 类 准确 度 达 到 了 96.3%。 Mohanty 
等 "" 比较 了 AlexNet 和 GoogleNet 两 种 网 络 性 
能 ， 训 练 数据 库 为 PlantVillage， 发 现 当 训练 数据 
与 测试 数据 之 比 是 8:2 并 采用 迁移 学 习 时 ， 在 
GoogleNet 上 平均 识别 准确 率 高 达 99.34%。Ram- 
charan 等 在 田间 拍摄 了 2756 张 木 暮 叶片 图 像 ， 
将 剪 切 的 15,000 张 小 叶片 图 像 构 造 数据 库 ， 采 用 
了 Inception v3 和 迁移 学 习 网 络 模型 ， 并 与 传统 
的 SYM 和 KK 最 邻近 (KNN, K-NearestNeighbor) 
分 类 器 进行 了 对 比 ， 识 别 3 种 病害 和 2 种 虫害 ， 
发 现 Inception v3 的 平均 准确 率 为 93%， 高 于 传 
统 分 类 右 。 为 解决 网 络 收敛 时 间 长 和 参数 内 存 需 
求 大 的 问题 ， 孙 俊 等 "在 AlexNet 的 基础 上 采 
用 批 归 一 化 方法 以 及 加 入 全 局 池 化 层 和 缩减 特征 
图 数目 的 方法 ， 得 到 8 种 改进 模型 ， 对 了 PlantVil- 
lage 中 的 14 种 植物 共 26 种 病害 进行 识别 ， 其 最 
优 模型 的 平均 测试 识别 准确 率 达 到 99.56%。Lu 
等 ”采集 了 9230 张 大 田 小 麦 图 像 用 于 训练 和 测 
试 ， 包 含 6 种 常见 小 麦 病 害 ， 采 用 深度 学 习 框 架 
基于 多 实例 学 习 的 弱 监 督 方法 ， 在 完成 诊断 功能 
的 同时 ， 可 以 通过 全 卷 积 网 络 (Fully Convolu- 
tional Network, FCN) 算法 分 割 出 病害 区 域 , 平 
均 识别 精度 为 97.95%。Ferentinos "" 比较 了 5 种 
典型 CNN 模 型 的 病害 识别 精度 ,该 研究 使 用 了 
一 种 包括 25 种 植物 和 57 种 病害 的 数据 库 ， 共 计 
87,000 张 叶片 病害 图 像 ， 其 中 37.3% 是 在 大 田 条 
件 下 拍摄 ，62.7% 是 在 实验 室 中 拍摄 ; 训练 方法 
是 从 头 训练 而 非 迁 移 训 练 ， 结 果 表 明 VGG 模型 
效果 最 好 ， 平 均 识别 准确 率 为 99.53%。 赵 建 敏 
等 5! 基于 TensorFlow 框 架 ， 搭 建 8 层 CNN+soft- 
max 分 层 卷 积 神经 网 络 模型 ， 自 动 学 习 到 256 个 
病害 图 像 特征 ， 采 用 softmax 分 类 器 识别 病害 ， 
简单 背景 单一 病 斑 识别 准确 率 达 到 87%。Xing 


等 "在 自然 环境 下 采集 了 17 种 柑橘 类 害虫 外 
和 7 种 柑橘 类 病害 网 像 共 12,561 张 ， 对 这 些 图 像 
进行 了 增 广 处 理 ， 对 比 6 种 网 络 模型 的 识别 效 
果 ， 其 中 在 DenseNet 基础 上 做 了 一 些 简化 的 
Weakly DenseNet 的 效果 最 好 ， 平 均 准 确 率 为 
93.42%。 曾 伟 辉 等 ”提出 了 一 种 高 阶 残 差 和 参 
数 共享 反馈 的 卷 积 神经 网 络 模型 ， 高 阶 残 差 子 网 
络 为 病害 表 观 提供 丰富 细致 的 特征 表达 ， 以 提高 
模型 识别 精度 ， 参 数 共享 反馈 子 网 络 用 来 抑制 原 
深层 特征 中 的 背景 噪声 ， 可 提高 模型 的 鲁 棒 性 ， 
该 网 络 在 Plantvillage 上 分 类 效果 优 于 几 种 传统 
的 分 类 器 。 开 等 ”使 用 多 个 CNN 组 成 United- 
Model 提取 互补 的 病害 特征 用 于 葡萄 病害 的 识 
别 ， 在 PlantVillage 上 取得 了 很 好 识别 效果 。 


4.2 基于 轻 量 型 网 络 的 植物 病害 识别 


近 些 年 ， 为 了 适应 复杂 自然 场景 中 数据 资源 
有 限 的 局 限 性 ， 研 究 人 员 展 开 了 对 轻 量 型 网 络 的 
研究 。 刘 洋 等 ”在 安 卓 手机 上 实现 了 PlantVil- 
lage 数 据 集 病害 图 像 识 别 FERET MobileNet 和 
Inception v3 两 种 轻 量 级 网 络 的 性 能 ， 结 果 表 明 
两 种 网 络 识别 精度 相差 很 小 ， 但 基于 MobileNet 
模型 的 程序 更 小 ， 运 行 速度 更 快 。 王 春山 等 
提出 了 改进 型 多 尺度 残 差 网 络 ， 通 过 改变 残 差 层 
连接 方式 ， 将 大 卷 积 核 分解 ， 减 少 了 模型 参数 ， 
设计 了 轻 量 级 病害 识别 模型 。Saleem 等 ” 利用 
Xception 对 PlantVillage 中 的 26 种 疾病 进行 分 类 , 
通过 对 先进 的 CNN 体系 结构 和 改进 的 深度 学 习 
模型 进行 对 比分 析 ， 选 出 了 识别 效果 最 好 的 
Xception 模型 ， 然 后 通过 各 种 优化 需 训 练 ， 选 取 
提高 性 能 最 多 的 Adam 优 化 器 ， 对 数据 集中 植物 
病害 的 识别 准确 率 最 终 达 到 99.81%。De Ocamop 
和 Dadios *' 用 轻 量 型 网 络 MobileNet 对 植物 病害 
进行 分 类 ， 证 明 MobileNet 在 数据 集 相 对 较 小 的 
情况 下 也 能 有 效 地 对 植物 病害 进行 分 类 。 


4.3 植物 病害 同步 检测 与 识别 


植物 病害 检测 和 识别 不 仅 可 以 采取 先 检 测 病 
害 区 域 “ 即 感 兴趣 区 域 或 IOT 区 域 ) 再 进行 病害 
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识别 的 分 步 操作 ， 还 可 以 同步 进行 ， 即 对 病害 区 
域 检测 的 同时 判别 病害 种 类 。De Luna A LAE 
类 条 件 下 采集 的 4923 张 患 病 及 健康 的 番 齐 叶片 
图 像 为 研究 对 象 ， 设 计 了 一 个 自动 图 像 采 集 系 统 
和 一 个 番茄 病害 检测 和 识别 模型 。 利 用 以 
Se 
害 检 测 的 同时 ， 对 番茄 叶片 病害 进行 了 分 类 ， 
模型 最 终 准确 率 达 到 95.75%。Rashid 等 ^ 
病害 检测 和 识别 研究 无 法 检测 作物 种 类 和 作物 病 
害 的 问题 ， 建 立 了 一 个 多 层次 深度 学 习 模 型 来 识 
别 马铃薯 叶片 病害 ， 首 先 使 用 YOLO v5 对 马 铃 
蓝 叶 片 进行 检测 ， 同 时 使 用 深度 学 习 技 术 PD- 
DCNN 对 马铃薯 叶片 上 的 病害 进行 分 类 ， 得 到 最 
终 准确 率 为 99.75%; 同时 ， 他 们 还 与 VGG16、 
InceptionResNetV2、 DenseNet 121, DenseNet169 , 
Xception 等 模型 进行 了 比较 ， 证 实 该 模型 在 精度 
和 计算 代价 方面 具有 优势 。Kiratiratanapruk 等 5 
使 用 了 4 种 卷 积 神经 网 络 预 训练 模型 (Faster- 
RCNN, RetinaNet, YOLOv3 fil Mask RCNN) 来 
检测 6 种 常见 的 水 稳 病害 ， 以 在 自然 条 件 下 拍摄 
的 6330 张 照片 为 数据 集 ， 并 在 该 数据 集 上 使 用 
了 上 述 4 种 模型 ， 同 时 实现 了 病 叶 检测 和 病害 分 
类 功能 ，YOLOv3 模 型 最 终 表 现 良 好 ， 准 确 率 达 
到 79.19%。 


4.4 植物 病害 识别 分 析 与 展望 
根据 卷 积 神经 网 络 模型 规模 ， 神 经 网 络 可 分 


然 有 学 者 研究 了 基于 移动 设备 的 病害 识别 ， 但 处 
理 速度 通常 在 数 百 毫秒 以 上 ， 并 非 实 时 识别 。 

从 深度 学 习 在 植物 病害 识别 的 研究 进展 看 ， 
在 研究 内 容 和 网 络 模型 等 方面 逐渐 发 生 转 变 。 在 
研究 内 容 方面 ， 逐 渐 从 提升 CNN 的 病害 识别 准 
确 率 转变 成 运算 速度 提升 ， 从 实验 室 单 一 背景 植 
物 病 害 识别 转变 成 自然 条 件 下 复杂 背景 植物 病害 
识别 ， 从 静态 的 病害 图 像 检 测 转变 成 动态 的 视频 
检测 ， 从 单一 植物 叶 部 病害 特征 提取 转变 成 对 
根 、 蔡 、 叶 、 花 、 果 不 同 植物 器 官 的 病害 症状 特 
征 提 取 。 在 CNN 模 型 方面 ， 从 VGG、 
GoogleNet, ResNet, DenseNet ^f W] 2% |h] Mo- 
bileNet、EfficientNet 轻 量 型 网 络 转变 ， 保 持 性 能 
d se E 提升 网 络 运行 

， 确 保 网 络 模型 可 在 算 力 有 限 的 人 工 智 能 边 

E 


5 面临 的 挑战 与 展望 


5.1 面临 的 挑战 


虽然 近年 来 国内 外 研究 者 基于 深度 学 习 技 术 
开展 了 大 量 的 植物 病害 目标 检测 与 分 类 识别 研 
究 ， 推动 了 检测 与 识别 准确 度 的 提高 ， 但 在 实际 
应 用 场景 中 ， 植 物 病害 检测 与 识别 仍然 面临 着 诸 
多 挑战 。 

(1) 光照 变化 导致 目标 区 域 准确 定位 难 。 在 
实际 植物 种 植 环境 中 ， 一 日 之 内 光照 变化 剧烈 、 


为 深度 网 络 和 轻 量 型 网 络 ， 近 年 植物 病害 识别 研 
进展 总 结 见 表 5 和 表 6 (第 40 页 )。 

植物 病害 图 像 数 据 库 无 论 是 开放 还 是 私有 
的 ， 都 有 一 个 共同 点 ， 即 病害 部 位 基本 在 图 像 中 
间 ， 且 占据 图 像 的 大 部 分 空间 ， 这 表明 目前 的 研 
究 似 乎 集中 在 人 机 交互 场景 ， 是 在 部 分 可 控 拍 摄 
条 件 下 进行 病害 识别 ， 与 植保 机 此 人 面临 的 实际 
情况 相差 较 大 。 大 量 实验 表明 ， 基 于 数据 库 识 别 
效果 最 好 的 CNN 在 不 同类 型 病害 图 像 库 表现 并 
非 始 终 最 好 ， 这 表明 需要 通过 大 量 试验 才能 为 特 
定 场景 的 病害 识别 筛选 出 最 适合 的 网 络 模型 。 虽 


不 同 背景 下 的 反光 、 不 同 气象 条 件 等 影响 因素 ， 
造成 植物 病 斑 目标 区 域 难 以 准确 定位 。 自 然 光 照 
条 件 下 ， 拍 摄 的 角度 、 高 度 或 者 地 点 可 能 会 导致 
部 分 图 片 中 病 斑 位 置 的 颜色 深浅 不 一 ， 使 得 病 斑 
特征 不 明显 ， 从 而 影响 分 类 识别 准确 度 。 

(2) 背景 复杂 导致 目标 的 准确 检测 难度 大 。 
在 实际 植物 种 植 环境 中 获取 的 病害 图 像 背 景 有 可 
能 会 包括 叶片 、 树 干 、 茎 秆 、 根 部 、 土 壤 、 杂 
Bl. RAT. OAR. HEMP. Sk. BK. BAS 
在 复杂 背景 条 件 下 获取 的 植物 病害 图 像 对 于 病 斑 
的 目标 检测 难度 较 大 。 同 时 ， 植 物 病 斑 颜色 形状 
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表 5 近年 来 基于 深度 网 络 的 植物 病害 识别 研究 进展 
Table 5 Recent advances in plant disease recognition based on deep network 
编号 作者 年 份 ” 植 物种 类 数据 集 / 幅 获取 方法 神经 网 络 类 型 最 高 准确 率 /% 
1 Jiang 等 [89 2021 ic pots 间 拍摄 VGG-16 E ee 

2 Abbas 45 57! 2021 番茄 16,012 PlantVillage DenseNet121 99.51 
3 Chellapandi “'**! 2021 14 种 植物 ”54,306 PlantVillage DenseNet 99.00 
4 SEM SE 2021 ”葡萄 ^ — 19,900 间 拍 摄 改进 VGG16 98.02 
5 Jiang 49" 2000 ”水 稻 8911 间 拍 摄 CNN+SVM 96.80 
6 Barman 等 ”1 2020 HH 2939 间 拍 摄 SSCNN 98.00 
7 Dang $£ 2000 «Bh 40 可 控 环 境 下 拍摄 GoogLeNet 90.00 
8 Jig 2020 葡萄 1619 PlantVillage UnitedModel 99.17 
9 Howlader 等 2009 ”石榴 2705 间 拍 摄 D-CNN 98.74 
= 10 Coulibaly 4& ?* 2019 XÆ 124 fal Eee VGG16 95.00 
> 11 Hu 4595) 2019 p 144 间 拍 摄 CIFAR-10Net 92.50 
e) 12 SibiyafillSumbwanyambe?" 2019 ”玉米 100 间 拍 摄 50 层 CNN 92.85 
den 13 王 艳 玲 等 "571 2019 番茄 14,529 PlantVillage AlexNet 95.62 
© 14 Singh 等 3 2019 ”芒果 1070 间 拍 摄 MCNN 97.13 
e 15 Picon 等 '” 2019 ”小 麦 8178 间 拍 摄 改进 ResNet-50 96.00 
N 16 Abdalla 等" 2019 ”油菜 籽 400 间 拍 摄 VGG16 96.00 
© 17 Xing 等 [791 2019 柑橘 12,561 间 拍 摄 Weakly DenseNet 93.42 
x. 18 伟 辉 等 7 2019 47 种 植物 “56,190 paea HORPSF 96.75 
E 19 Atole fil Park?" 2018 ”水 稻 227 丑 间 拍摄 AlexNet 91.23 
din 20 Zhang 等 ”| 2018 ”玉米 500 PlantVillage+ 线 上 采集 GoogLeNet 98.90 
2 21 Liu 4 101 20018 R 13,689 可 控 环 境 下 拍摄 AlexNet 97.62 
>< 22 张建华 等 "9 2018 ”棉花 5510 间 拍 摄 VGG-16 89.51 
E 23 Rangarajan 4j 2008 ili 13,262 PlantVillage VGG16 97.49 
T 24 Ferentinos ^! 2018 25 种 植物 “87,000 ro € a" VGG 99.53 
o 25 赵 建 敏 等 "31 2018 HE 6000 恬 间 拍 摄 8 层 CNN 87.00 
26 De Chant 4 99 20017 ”玉米 1796 间 拍 摄 CNN 96.70 
27 Lu e077) 2017 ”水 稻 500 间 拍 摄 CNN 95.00 
28 Oppenheim fülShani*! ^ 2017 #3 2465 可 控 环 境 下 拍摄 VGG 90.00 
29 Ramcharan 等 "1 2017 KE 2756 间 拍 摄 Inception v3 93.00 
30 孙 俊 等 2017 ”14 种 植物 21,917 PlantVillage 改进 的 AlexNet 99.41 
31 Lu 等 3 2017 小 麦 9230 间 拍 摄 VGG-FCN-VD16 97.95 
32 Fujita 1! 2016 黄瓜 7520 间 拍 摄 CNN 82.30 
33 Sladojevic 45: 2016 13 种 植物 2589 线 上 采集 Caffe+ 迁 移 学 习 96.30 
34 Mohanty 4& 7"! 2016 14 种 植物 54,306 PlantVillage AlexNet 99.35 
35 Kawasaki ^j^! 2015 黄瓜 800 间 拍 摄 CNN 94.90 

等 有 可 能 与 背景 中 的 其 他 对 象 相似 ， 造 成 目标 检 ”的 识别 ， 采 用 直接 截取 所 采集 图 像 感 兴趣 的 区 域 

测 的 准确 率 降 低 。 的 方法 ， 很 少 考虑 遮挡 问题 。 和 遮挡 问题 在 复杂 自 


(3) 遮挡 导致 目标 特征 缺失 、 骂 声 重合 。 目 — 然 环 境 中 普遍 存在 ,包括 由 叶片 姿态 变化 引起 的 
a 000 叶片 丈 挡 、 分 支 庶 挡 、 外 部 光照 引起 的 光 谈 挡 以 
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表 6 近年 来 基于 轻 量 型 网 络 的 植物 病害 识别 以 及 病害 检测 与 识别 同时 进行 的 研究 进展 
Table 6 Recent advances in plant disease recognition based on lightweight network and disease detection 
and recognition simultaneously 
编号 作者 年 份 ” 植物 种 类 ”数据 集 / 幅 获取 方法 神经 网 络 类 型 最 高 准确 率 /% 
1 Srinidhi 4: ^ 2021 SER 3600 ] 间 拍摄 EfficientNetB7 99.80 
2 Zhou 4! 2021 “番茄 .黄瓜 4284 | 间 拍 摄 PRP-Net 98.26 
3 Rashid $! 2021 马铃薯 4062 PlantVillage YOLOv5+PDDCNN 99.75 
4 Zhang ^? 2020 黄瓜 2816 1 间 拍 摄 EfficientNet-B4 96.00 
Ea PlantVillage , AI Chal- 
5 ES Ax [80] 2020 3 fi 19,517 " Multi-scale ResNet 95.95 
春山 等 种 植物 lenge2018 数 据 集 UlU-Scale Kese 
6 Saleem 等 [81 2020 ”14 种 植物 54,306 PlantVillage Xception 99.81 
7 Kiratiratanapruk'*! 2020 水 稳 6330 1 间 拍 摄 YOLOv3 79.19 
ATA Ac 79] 4 . . : MobileNet:95.02 
8 刘洋 等 [2 2019 ”13 种 植物 54,306 PlantVillage MobileNet „Inception V3 eio 


9 De Ocamop fil Dadios'*?) 2018 5 种 植物 6970 
10 De Luna 4j! 2018 番茄 4923 


Inception V3:95.62 


] 间 拍摄 + 线 上 采集 MobileNet 89.00 


] 间 拍摄 AlexNet+ F-RCNN 95.75 


A In] ie P4255 BERI AE XEPORTE P 
物 病害 识别 的 难点 在 于 特征 缺失 和 遮挡 引起 的 品 
声 重 个 。 不 同 的 遮挡 条 件 对 识别 算法 有 不 同 程度 
的 影响 ， 导 致 误 检 甚至 漏 检 。 
(4) 病害 相似 性 导致 错 判 或 者 误 判 。 不 同 的 
病害 引起 的 症状 具有 相似 性 。 症 状 是 判断 病害 种 
类 的 主要 依据 之 一 ， 奉 不 同 种 类 病害 的 发 病症 状 
极为 相似 ， 通 过 二 维 图 像 无 法 准确 地 辨识 ， 需 要 
获取 更 多 维度 信息 如 深度 信息 、 光 谱 信 息 、 红 外 
信息 、 葡 光 信 息 等 ， 才 能 准确 判断 出 植物 病害 
类 别 。 

(5) 病害 症状 变化 导致 病害 识别 难度 大 。 病 
原 落 可 以 在 植物 不 同时 期 进行 侵 染 ， 发 病 时 又 会 
因 植 物 的 品种 、 生 育 期 和 融 官 表现 出 不 同 的 症 
状 ， 同 一 种 病害 在 不 同 的 危害 时 期 或 不 同 侵 染 程 
度 下 表现 出 不 同 症状 。 同 一 种 病害 危害 植物 的 不 
同 组 织 或 植物 器 官 症 状 会 有 差异 ， 如 嫩 芽 、 子 
叶 、 真 叶 、 果 实 、 茎 和 杆 、 根 部 等 呈现 出 来 的 症状 
各 有 不 同 。 同 一 种 病害 在 同 种 植物 融 官 上 也 会 呈 
现 不同 的 症状 类 型 ， 比 如 棉花 黄 萎 病 常见 的 症状 
有 4 种 类 型 ， 分 别 为 黄斑 型 、 叶 枯 型 es A 
落叶 型 ， 这 对 病害 识别 提出 了 很 大 的 挑战 。 

(6) 多 重病 害 交 坪 导 致 植物 病害 的 检测 和 识 
别 准 确 率 低 。 目 前 提 到 的 病害 检测 和 识别 都 是 基 
于 每 片 叶子 上 均 是 一 种 病害 或 一 种 病害 特征 最 为 


明显 的 情况 而 研究 的 。 但 在 自然 条 件 下 ， 常 见 多 
种 病害 同时 存在 于 单 片 叶子 的 情况 ， 还 存在 病害 
与 虫害 相互 重 辣 现象， 使 植物 病害 检测 和 识别 成 
为 一 项 复杂 的 工作 。 


5.2 展望 


深度 学 习作 为 新 一 代 人 工 智 能 技术 有 着 两 方 
面 的 优势 : 一 是 可 随 着 数据 规模 的 增加 不 断 提 升 
其 性 能 ; 二 是 可 以 从 数据 中 直接 提取 特征 ， 前 减 
对 每 一 个 问题 设计 特征 提取 器 的 工作 量 。 因 此 ， 
作为 大 数据 时 代 的 算法 利器 ， 深 度 学 习 技 术 受到 
各 个 国家 的 高 度 重 视 ， 关 于 卷 积 神经 网 络 的 研究 
有 很 多 。 

基于 深度 学 习 的 植物 病害 的 检测 和 识别 技术 
目前 已 经 发 展 的 较为 成 熟 ， 但 在 自然 条 件 下 依旧 
面临 着 很 多 的 挑战 。 总 体 而 言 ， 难 点 主要 集中 于 
背景 和 病害 本 身 特性 的 复杂 上 ， 为 了 克服 这 些 难 
点 ， 需 要 性 能 更 好 的 神经 网 络 和 更 丰富 的 数据 
集 。 在 未 来 ， 深 度 神 经 网 络 的 性 能 将 不 断 提 升 ， 
深度 神经 网 络 节 点 功能 不 断 丰 富 ， 深 度 神经 网 络 
工程 化 应 用 技术 不 断 深化 。 数 据 集 也 将 从 单一 可 
控 背 景 下 拍摄 收集 转换 为 自然 条 件 复 杂 背 景 下 采 
集 。 男 外 ， 在 数据 模 态 方面 ， 也 将 从 单一 模 态 的 
视觉 通道 向 拥有 近 红 外 光谱 、 高 光谱 、 红 外 热 图 
像 、 深 度 、 菊 光 等 多 模 态 数据 转变 ， 病 害 识 别 的 
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准确 率 进 一 步 提升 ， 同 时 可 以 利用 多 模 信息 开展 
早期 植物 病害 的 判别 。 随 着 深度 学 习 技术 的 快速 
发 展 ， 如 何 将 最 新 深度 学 习 技 术 与 植物 病害 检测 
和 识别 相 结合 ， 解 决 检测 顺 定 位 能 力 差 、 识 别 模 
型 精度 低 、 算 法 泛 化 性 能 弱 以 及 构建 大 规模 数据 
集合 难 等 方面 的 问题 ， 形 成 可 面向 复杂 自然 条 
件 、 多 种 植物 病害 、 应 用 于 实际 大 田 作业 的 模型 
算法 ， 提 升 田 间 病 害 的 智能 监测 水 平 ， 创 制 出 适 
用 于 田间 作业 的 智能 植保 机 械 装备 ， 是 该 领域 未 
来 主要 的 研究 方向 。 

同时 对 植物 病害 的 检测 和 识别 并 不 是 一 个 简 
单 的 工作 ,不 能 仅 徘 植物 表面 图 像 来 获得 可 徘 的 
结果 。 并 且 ， 在 实际 应 用 场景 中 ,植物 叶片 上 时 
常 有 多 种 病害 共存 ， 这 将 对 检测 和 识别 产生 很 大 
的 干扰 ， 未 来 植物 病害 检测 和 识别 应 该 更 好 地 与 
农业 理论 基础 相 结 合 ， 在 对 图 像 分 析 的 基础 上 ， 
还 要 考虑 环境 因素 、 作 物 生长 规律 以 及 病菌 的 生 
物 学 特性 等 多 种 因素 ， 进 一 步 提高 病害 识别 和 检 
测 结果 的 实用 性 ， 同 时 让 多 种 病害 同时 检测 和 识 
别 成 为 可 能 。 


I 
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Research Progress of Deep Learning in Detection and 
Recognition of Plant Leaf Diseases 
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(1. Agricultural Information Institute of Chinese Academy of Agricultural Sciences/Key Laboratory of Agricultural 
Big Data, Ministry of Agriculture and Rural Affairs, Beijing 10081, China; 2. School of Mechanical and Electrical 
Engineering, Gansu Agricultural University, Lanzhou 730070, China) 


Abstract: Accurate detection and recognition of plant diseases is the key technology to early diagnosis and intelligent monitoring 
of plant diseases, and is the core of accurate control and information management of plant diseases and insect pests. Deep learn- 
ing can overcome the disadvantages of traditional diagnosis methods and greatly improve the accuracy of diseases detection and 
recognition, and has attracted a lot of attention of researchers. This paper collected the main public plant diseases image data 
sets all over the world, and briefly introduced the basic information of each data set and their websites, which is convenient to 
download and use. And then, the application of deep learning in plant disease detection and recognition in recent years was sys- 
tematically reviewed. Plant disease target detection is the premise of accurate classification and recognition of plant disease and 
evaluation of disease hazard level. It is also the key to accurately locate plant disease area and guide spray device of plant pro- 
tection equipment to spray drug on target. Plant disease recognition refers to the processing, analysis and understanding of dis- 
ease images to identify different kinds of disease objects, which is the main basis for the timely and effective prevention and 
control of plant diseases. The research progress in early disease detection and recognition algorithm was expounded based on 
depth of learning research, as well as the advantages and existing problems of various algorithms were described. It can be seen 
from this review that the detection and recognition algorithm based on deep learning is superior to the traditional detection and 
recognition algorithm in all aspects. Based on the investigation of research results, it was pointed out that the illumination, shel- 
tering, complex background, different disorders with similar symptoms, different changes of disease symptoms in different peri- 
ods, and overlapping coexistence of multiple diseases were the main challenges for the detection and recognition of plant diseas- 
es. At the same time, the establishment of a large-scale and more complex data set that meets the specific research needs is also 
a difficulty that need to face together. And at further, we point out that the combination of the better performance of the neural 
network, large-scale data set and agriculture theoretical basis is a major trend of the development of the future. It is also pointed 
out that multimodal data can be used to identify early plant diseases, which is also one of the future development direction. 

Key words: plants; leaf disease; deep learning; disease detection; recognition; convolutional neural network; plant diseases im- 


age data set 


(XE Bl; www.smartag.net.cn 免费 获取 电子 版 全 文 ) 


